ComboShoppingBench: Evaluating LLM Agents for Budget-Constrained Basket Shopping with Coupons
组合购物基准:LLM代理在预算约束下带优惠券的篮子购物评估
🧭 LLM Agent 购物评估基准 ★ 深度解读
JD.com
提出ComboShoppingBench基准,评估LLM代理在跨商品兼容性、预算和优惠券约束下的组合购物能力,最强代理仅61.2%成功率。
📌 工作参考价值(4 点)
- 电商购物助手可借鉴“隐藏见证”构建法:先生成可行篮子再反向创建任务,确保有解但不限制推荐多样性。
- 混合评估框架(语义判断+确定性验证)可用于实际购物Agent评测,分离语义满足与交易可行性。
- 优惠券最优选择是瓶颈,提示实际系统需要专门的组合优化模块,而非仅靠LLM推理。
- 复杂组合约束下,Agent容易丢失个别条件,可通过提示工程或工具增强多条件跟踪。